基於時域上基週同步疊加法之歌聲合成系統 (Singing Voice Synthesis System Based on Time Domain-Pitch Synchronized Overlap and Add) [In Chinese]

نویسندگان

  • Ming-Kuan Wu
  • Chia-Ping Chen
چکیده

In this study, we propose and implement a concatenation-based singing synthesis system to synthesize the singing voice with background music. We record three different pitches to build our corpus for all syllables. The synthesis informations, including velocity, note number, start time and end time are extracted from the main melody. Runs and riffs information was added into consideration afterward. We use TD-PSOLA to modify the synthesis units in time domain. At last, we add back the background music extracted from MIDI to our synthesis song. We implemented a user interface for users to synthesize songs. This interface can be used to adjust the synthesis songs, for example, adjust the overall pitches in the song, modify syllables, etc. Finally, we evaluate the quality, clarity and similarity of the synthesis songs. The results show that the proposed method achieve better results with simple songs than with fast songs. keywords: concatenation synthesis, singing synthesis, TD-PSOLA Proceedings of the Twenty-Fifth Conference on Computational Linguistics and Speech Processing (ROCLING 2013)

برای دانلود رایگان متن کامل این مقاله و بیش از 32 میلیون مقاله دیگر ابتدا ثبت نام کنید

ثبت نام

اگر عضو سایت هستید لطفا وارد حساب کاربری خود شوید

منابع مشابه

整合邊際資訊於鑑別式聲學模型訓練方法之比較研究 (A Comparative Study on Margin-Based Discriminative Training of Acoustic Models) [In Chinese]

鑑別式聲學模型訓練在近代自動語音辨識(Automatic Speech Recognition, ASR)中扮演 重要的角色。在許多基於不同思維且能有效地提昇辨識率的鑑別式聲學模型訓練方法陸 續被提出後,對於訓練方法的相關推廣與改進便如雨後春筍般地興起;而這些方法在本 質上,皆是在描述訓練語句與語音辨識器所產生對應詞圖(Word Graph)之間的關係。本 論文首先將統整與歸納近年來所發展的多種鑑別式聲學模型訓練方法,並以三種最具代 表性鑑別式訓練方法:最小化分類錯誤(Minimum Classification Error, MCE)、最大化交 互資訊(Maximum Mutual Information, MMI)、最小化音素錯誤(Minimum Phone Error, MPE)為範例,透過有系統地轉換與化解方程式,得到聲學模型訓練準則的共通表示函 數型態。我們可以發現到,對於...

متن کامل

基於HNM 之國語音節信號的合成方法 (An HNM Based Method for Synthesizing Mandarin Syllable Signal) [In Chinese]

本文提出一個基於 HNM (Harmonic-plus-noise model) 的國語音節信號的合成方法,使 用此方法時,一種音節只需錄、存一遍發音,就可用以合成多種韻律特性的發音,並且 不易查覺出信號品質的衰退。在這個方法裡,一個欲合成的音節的音長,首先被分割成 它的組成音素的音長,依據原始和合成音節裡各音素的音長,可建造一個片斷線性的時 間對映函數,如此合成音節時間軸上的一個控制點,就可經由對映至原始音節上找出和 它對應的兩個音框。然後依據兩音框的 HNM參數作時間上的內差,再進一步在音色一 致性的條件下作基週軌跡調整的內差,來求得該控制點上的 HNM參數。當各個控制點 上的 HNM參數值都決定之後,就可使用我們重新公式化的 HNM合成公式,來計算出 各個信號樣本的值。接著我們作聽測實驗來評估合成語音的清晰度,初步結果顯示,本 文所提的 HNM擴充的方法所合成出的信號,非常清晰...

متن کامل

Tunable Embedded Software Development Platform

由於新的功能需求以及新硬體的加入使 得嵌入式系統的需求快速增加。軟、硬體並行 開發可以縮短系統開發時間並降低嵌入式系 統開發成本。我們提出一個"可調整的嵌入式 系統軟體發展平台 (TESDP) "來協助分離 軟、硬體開發,同時維持開發平台以及嵌入式 系統平台間的相似性。TEDSP 在嵌入式軟體 發展用的電腦上,提供一個讓嵌入式系統軟體 可以執行的環境。我們為嵌入式系統軟體 (ESS) 的即時控制核心提供一套監視以及驗 證資訊蒐集機制。ESS 與可調適的模擬硬體 框架 (SHF) 在 TESDP 上合作以達成伴隨嵌 入式系統軟硬體更新與演進的系統開發工 作。此一方法,讓嵌入式系統軟、硬體開發可 以同步進行。 我們展示將此一方法應用於一 個車用嵌入式系統:模組式行動通信終端機 (MMDT) 的開發。MMDT應用於智慧型運輸 系統領域,提供資料通訊及全球定位功能,提 供行控中心對於所屬車隊...

متن کامل

強健性語音辨識中分頻段調變頻譜補償之研究 (A Study of Sub-band Modulation Spectrum Compensation for Robust Speech Recognition) [In Chinese]

雖然語音科技進步迅速,但自動語音辨識仍是一門值得繼續研究開發的課題。因為 目前多數的語音辨識系統應用於不受干擾的安靜環境,雖然能得到相當滿意的辨識效 果,但若將其應用於實際的環境中,語音訊號往往會因為環境雜訊的影響,導致辨識效 能有明顯地衰減,發展多年的強健性技術即是針對此項缺點作改進。 在諸多強健性技術中,有一類方法為對語音特徵作統計上的正規化,傳統上, 這些方法都是對全頻段的語音特徵時間序列做正規化處理,然而,在分析此類方法的效 能上,通常是以其調變頻譜的正規化程度作為效能的依據,因此,如果直接在語音特徵 之調變頻譜上作正規化,應亦可達到不錯的效果。另外,由於不同頻率的調變頻率成 份具有不相等的重要性,但是傳統之特徵時間序列正規化法相對忽略了此性質,基於這 些觀察,在本論文中,我們提出了一系列的分頻段調變頻譜統計正規化法,此類方法可 以分別正規化不同頻段的統計特性,進而提升語音特...

متن کامل

結合HMM 頻譜模型與ANN 韻律模型之國語語音合成系統 (A Mandarin Speech Synthesis System Combining HMM Spectrum Model and ANN Prosody Model) [In Chinese]

本論文研究了一種結合 HMM (hidden Markov model)頻譜模型與 ANN (articifical neural network )韻律模型的國語語音合成系統。在訓練階段,對各個訓練語料音框算出 DCC係數(discrete cepstrum coefficients),以作為頻譜特徵參數,接著對於一種音節的多 個發音,依 DTW (dynamic time warping)匹配出的頻譜演進路徑作分群,各群建立一個 HMM,並記錄各音節發音的文依性資訊。在合成階段,首先依據文依性資訊挑選出輸 入文句各音節的 HMM模型,接著判定音節 HMM的各個狀態為無聲、或有聲,然後使 用音長 ANN模型及狀態平均音長來決定 HMM各狀態應該產生的音框數。除了前人提 出的MLE(maximum likelihood estimate)法,我們另外研究二種內插方法來產生各音框的 D...

متن کامل

ذخیره در منابع من


  با ذخیره ی این منبع در منابع من، دسترسی به آن را برای استفاده های بعدی آسان تر کنید

عنوان ژورنال:

دوره   شماره 

صفحات  -

تاریخ انتشار 2013